Abstract This paper presents the main results of a research about a parallel recovery project for the elementary school conducted between 2018 and 2020, in partnership with the Secretaria Municipal de Educação [Department of Education] of the city of São Paulo (Brazil), using the Patio Digital platform. Primary and secondary data are analyzed to characterize its participants (school units, pedagogical coordinators, pedagogical support teachers and students), seeking to understand its application and development of the project, and to provide public managers with information on how to improve it. The results reveal a positive relationship between approval and learning recovery and between school reinforcement and increased student proficiency. The present research confirms on a large scale trends pointed out by other studies, such as the greater participation of male, Black and poorer students in recovery classes, and indicates the need for the Department of Education to provide greater support to schools and their professionals.

Résumé Cet article présente les principaux résultats d’une recherche menée en collaboration avec la Secretaria Municipal de Educação [Bureau de l’Éducation] de la ville de São Paulo (Brésil) entre 2018 et 2020 pour évaluer le programme de soutien scolaire pour l’éducation primaire, à l’appui de la plateforme numérique Pátio Digital. Des bases de données sécondaires et empiriques ont été analysées pour caractériser les participants du projet (écoles, coordinateurs pédagogiques, enseignants et étudiants), pour connaître le développement du programme et pour offrir des indications pour l’améliorer. Les résultats révèlent des rélations positives entre soutien scolaire et réussite aussi bien qu’avec rendement des étudiants. L’étude confirme quelques tendances signalées par des études précédentes, à savoir, la plus grande présence de garçons les plus pauvres et noirs dans les cours de soutien scolaire et indiquent la necessité d’un soutien plus effectif de la Secretaria de Educação.

Resumen El articulo presenta algunos resultados de investigación sobre un proyecto de recuperación paralela en la educación primaria, realizada entre 2018 y 2020, en alianza con la Secretaría Municipal de Educación de São Paulo (Brasil), a través de la plataforma Pátio Digital. Analisa datos primarios y secundarios, con el fin de caracterizar a los participantes (unidades escolares, coordinadores pedagógicos, docentes de apoyo pedagógico y estudiantes), comprender la aplicación y desarrollo del proyecto y ofrecer subsidios para su mejora. Los resultados revelan una relación positiva entre la aprobación y recuperación de los aprendizajes y entre el refuerzo escolar y el aumento de la competencia de los estudiantes. El presente estudio confirma a gran escala tendencias señaladas por otros estudios, como la mayor participación de estudiantes varones, negros y más pobres en las clases de recuperación, e indica la necesidad de que la Secretaría de Educación brinde un mayor apoyo a las escuelas y a sus profesionales.

Resumo O artigo apresenta os principais resultados de pesquisa sobre projeto de recuperação paralela no ensino fundamental, realizada em parceria com a Secretaria Municipal de Educação (SME) de São Paulo entre 2018 e 2020, por meio da plataforma Pátio Digital. Analisam-se dados primários e secundários com o objetivo de caracterizar as unidades escolares, os coordenadores pedagógicos, professores de apoio pedagógico e estudantes envolvidos, bem como entender o desenvolvimento do programa e fornecer subsídios para aprimorá-lo. Os resultados revelam uma relação positiva entre aprovação e recuperação de aprendizagens e entre reforço escolar e aumento da proficiência dos estudantes. O presente estudo confirma em larga escala tendências apontadas por outros estudos, tais como a maior participação de estudantes do sexo masculino, negros e mais pobres nas turmas de recuperação, e indica a necessidade de a SME prestar maior apoio às escolas e seus profissionais.

RESUMO: Este artigo tem como objetivo discutir as relações que se estabelecem entre avaliação e currículo em diversos momentos do desenvolvimento do campo da avaliação educacional no Brasil e no exterior. Retoma como tais relações vêm se estabelecendo desde o século XIX, para argumentar que as tessituras entre avaliação e currículo sempre ocorreram, observando-se mudanças em suas características e propósitos. Discute resultados de pesquisas que constatam que as avaliações externas e em larga escala têm induzido práticas curriculares e pedagógicas nas escolas brasileiras, em diversos âmbitos administrativos, a fim de compreender em que medida existe um reducionismo e controle curricular. Tais discussões dão base para apontar a necessidade de se recolocar o debate para além da discussão sobre indução curricular, defendendo o imperativo de incorporar o debate sobre as finalidades e objetivos educacionais, bem como a análise do potencial de avaliações e currículos para efetuar a garantia constitucional ao direito à educação.

ABSTRACT: This article aims to discuss the relations established between evaluation and curriculum at various moments in the development of the educational evaluation field in Brazil and abroad. It retakes how such relations have been established since the 19th century to argue that the interrelations between evaluation and curriculum have always taken place, despite changes in their characteristics and purposes. It discusses results of studies which show that external and large-scale evaluations have induced curricular and pedagogical practices in Brazilian schools, in different administrative settings, to understand to which extent there are reductionism and curriculum control. These discussions provide a base for pointing out the need to reinsert the debate beyond the discussion of curricular induction, defending the imperative to incorporate the debate on educational ends and objectives, as well as the analysis of the potential of assessments and curricula, to carry out the constitutionally guaranteed right to education.

RESUMEN: Este artículo tiene como objetivo discutir las relaciones que se establecen entre evaluación y currículo en diversos momentos del desarrollo del campo de la evaluación educativa en Brasil y en el exterior. En el siglo XIX, las relaciones entre la evaluación y el currículo siempre ocurrieron, observándose cambios en sus características y propósitos. Discute resultados de investigaciones que constatan que las evaluaciones externas y en gran escala han inducido prácticas curriculares y pedagógicas en las escuelas brasileñas, en diversos ámbitos administrativos, para comprender en qué medida existe un reduccionismo y control curricular. Tales discusiones dan base para apuntar la necesidad de reubicar el debate más allá de la discusión sobre la inducción curricular, defendiendo el imperativo de incorporar el debate sobre las finalidades y objetivos educativos, así como el análisis del potencial de evaluaciones y currículos para efectuar la garantía constitucional al derecho a la educación.

RESUMO Este artigo tem como propósito discutir como diversos estudos acadêmicos têm analisado e reportado relações existentes entre avaliação externa e em larga escala e gestão educacional, quer no nível das redes de ensino, quer no interior das escolas. Para isso, analisa-se inicialmente a expansão de iniciativas de avaliação no contexto brasileiro em todos os níveis federados. Em um segundo momento explica-se a pesquisa da qual resultou o presente texto, explicitando-se os critérios utilizados para a seleção dos trabalhos e descrevendo-se características gerais dessa produção. Finalmente, segue-se a análise de aportes dessa produção, ressaltando as temáticas discutidas e as relações entre avaliação e gestão reportadas nos trabalhos de doutorado.

ABSTRACT This paper aims to discuss how different academic studies have analyzed and reported the existing relationships between external large-scale assessment and educational management, both at the level of educational districts as well as at the school level. For this, it initially analyzed the expansion of initiatives for this type of evaluation, in the Brazilian context, at all federated levels. Second, the research from which the present text resulted is explained, and the criteria used for the selection of the studies and the general characteristics of this production are described. Finally, the analysis of the contributions to this production follows, emphasizing the themes discussed and the relations between assessment and management reported in the doctoral studies.

Resumo O presente artigo discute os aportes do debate acadêmico sobre quatro dimensões relacionadas às políticas docentes no Brasil: atratividade, formação, retenção e avaliação. A partir de revisão de trabalhos que tratam dessas dimensões, muitas vezes isoladamente, objetiva-se destacar os principais problemas a serem equacionados pelas políticas públicas direcionadas aos professores visando à melhoria da qualidade da educação. Para isso, o trabalho divide-se em seis partes: uma introdução, na qual se apresenta a importância da questão docente e os desafios que ela impõe às políticas públicas, e quatro seções, nas quais são analisadas a atratividade, a formação, a retenção e a avaliação de docentes, respectivamente. Ao final sintetizam-se os principais desafios colocados à superação dos problemas destacados.

Abstract This paper discusses the contributions of the academic debate on four dimensions related to teacher policies in Brazil: attractiveness, training, retention and evaluation. Starting from a review of works that address these dimensions, often individually or without a relationship with each other, the aim is to highlight the main problems to be resolved by public policies driven to teachers in order to improve the educational quality. The paper is divided into six parts: an introduction, which presents the importance of the teacher’s issue and the challenges imposed by it on public policy; and four sections in which attractiveness, training, retention and evaluation of teachers are analyzed, respectively. The main challenges to be equated to overcome the problems discussed are synthesized at the end of the paper.

Resumen Este artículo analiza las contribuciones del debate académico en cuatro dimensiones relacionadas con las políticas docentes en Brasil: el atractivo, la formación, la retención y la evaluación. De la revisión de las obras que se ocupan de estas dimensiones, a menudo aisladamente, el objetivo es resaltar los principales problemas que deben ser resueltos por las políticas públicas dirigidas a los maestros, con el fin de mejorar la calidad de la educación. Para ello, el trabajo se divide en seis partes: una introducción, que presenta la importancia de la cuestión de enseñanza y los desafíos que impone a las políticas públicas; y cuatro secciones en las que se analizan el atractivo, la formación, la retención y la evaluación de los profesores, respectivamente. Al final, se sintetizan los principales desafíos que deben resolverse para superar los problemas señalados.

RESUMO Visando a mapear e caracterizar iniciativas relacionadas às avaliações em larga escala em desenvolvimento nos municípios brasileiros, desenvolveu-se uma pesquisa com abrangência nacional. Seus resultados são tratados no presente artigo, que se organiza em quatro seções. Inicialmente, apresenta-se uma síntese dos estudos já produzidos sobre a temática e, em seguida, explicitam-se os procedimentos metodológicos. Na terceira seção são discutidos os resultados obtidos por meio de survey, que abarcam informações obtidas de 4.309 municípios brasileiros. Por fim, são expostas conclusões acerca das concepções presentes nas avaliações propostas pelos municípios, bem como os usos dos resultados que as gestões desses entes federados fazem das diversas avaliações existentes, que evidenciam a consolidação da avaliação em larga escala como instrumento de gestão educacional nas municipalidades.

ABSTRACT Aiming to map and characterize initiatives related to large-scale assessments under development in Brazilian municipalities, a research with national coverage was developed. The results are addressed in this article, which is organized into four sections. Initially, it presents a synthesis of studies already carried out on the subject, and then methodological procedures are explained. In the third section, results obtained by the survey are discussed, with information collected from 4,309 Brazilian municipalities. Finally, conclusions are drawn about the concepts underlying evaluation methods proposed by each municipality, as well as the uses of results for educational management by the cities’ authorities, showing that large-scale assessment programs are the main tool for education management across municipalities.

RESUMEN Con el objetivo de mapear y caracterizar las iniciativas municipales relacionadas con evaluaciones a gran escala, se llevó a cabo una investigación en los municipios con cobertura nacional, cuyos resultados se abordan en este artículo, que se organiza en cuatro secciones. Inicialmente, se presenta la síntesis de estudios ya producidos sobre el tema bajo análisis y se explican a los procedimientos metodológicos. En la tercera sección se discuten los resultados obtenidos de la investigación, que cubren las manifestaciones obtenidas a partir de 4.309 de los 5.568 municipios investigados. Por último, se exponen las conclusiones acerca de los conceptos presentes en las evaluaciones propuestas por municipios y usos de los resultados que las gestiones municipales hacen de las diversas evaluaciones existentes, que muestran la consolidación de la evaluación a gran escala como una herramienta en la gestión educativa de los municipios.

Resumo As reformas educativas implantadas nas últimas décadas caracterizam-se, entre outros traços, pela utilização de avaliações em larga escala como instrumento de gestão de redes de ensino e de responsabilização de profissionais da educação. Isso tem ocorrido de modo peculiar em cada país e, no Brasil, observa-se a difusão dessas avaliações, por meio de provas padronizadas. Tais avaliações geram na comunidade acadêmica e educacional um debate no qual há posições que vão da contraposição extremada ao reconhecimento da contribuição das avaliações em larga escala e das medidas educacionais como norteadoras de políticas e programas educacionais, incluindo as restrições ao uso que vem sendo feito de seus resultados. Diante dos argumentos favoráveis e contrários, incluindo as dimensões técnicas e políticas, neste trabalho, apresenta-se uma reflexão que reconhece a utilidade dessas avaliações, ainda que questionando alguns de seus usos para a gestão como critério, por exemplo, para a alocação de recursos nas escolas com melhores resultados, a definição de bônus para professores, o estabelecimento de rankings estimulando a competição entre escolas e redes de ensino, e seu entendimento como indicador único e principal de qualidade de ensino. Assim, o objetivo deste artigo é discutir as principais críticas e ponderações às avaliações em larga escala presentes na literatura nacional e internacional e sistematizar o debate em torno de suas potencialidades. Para tanto, dois aspectos recorrentes na literatura foram destacados, o papel e a validade das avaliações em larga escala nas reformas educacionais e o uso de seus resultados para a gestão de sistemas e escolas.

Abstract Educational reforms in recent decades have been characterized, among other features, by the use of large-scale assessments as a management tool of school systems and of educator accountability. This phenomenum has occurred differently in each country. In Brazil there has been widespread use such assessments with standardized tests, which generates in the academic and educational community not consensus but a debate in which there are different positions, ranging from the extreme opposition to the recognition of the contribution of large-scale assessments and educational measures to guide educational policies and programs, including restrictions on the use made of their results. Considering positive and negative arguments, including technical and political dimensions, this article, on the one hand, presents a reflection that recognizes the usefulness of these evaluations, and, on the other, questions some of its uses for educational management, for example, allocating resources in schools with best results, setting bonuses for teachers, establishing rankings which stimulate competition between schools and school systems, and understanding test results as a unique and primary indicator of education quality. The objective of this article is to discuss the main pros and cons to large-scale assessments in the national and international literature and systematize the debate on their potential. For this, it focuses on two recurrent themes in literature: the role and validity of large-scale assessments in the education reforms and the use of their results for the management of educational systems and schools.

Este artigo discute as estratégias metodológicas utilizadas para enfrentar o desafio de estabelecer indicadores para compor a avaliação de impacto de um programa de formação de professores em serviço, o Programa Letra e Vida. Este programa foi implementado na rede de ensino do Estado de São Paulo, no período de 2003 a 2006, com o propósito de aprimorar a prática de professores alfabetizadores atuantes nos primeiros anos do Ensino Fundamental. Antecedendo a discussão procedimental, é apresentada, com base em contribuições da literatura, a noção de indicador, seus tipos e propriedades, bem como os aspectos políticos e técnicos – que estão subjacentes à definição de indicadores – que possam subsidiar a avaliação de programas educacionais.

This paper discusses the methodological strategies used to meet the challenge of establishing indicators to compose the impact evaluation of an in-service teacher training program called “Letra e Vida”. This program was implemented in the school system of the state of São Paulo, from 2003 to 2006, in order to improve the practice of literacy teachers working in the early years of elementary school. Preceding the methodological discussion, some concepts are discussed based on contributions from the academic literature, such as the notion of indicators, types of indicators, and their properties, as well as the political and technical aspects underlying the definition of indicators, which might support the evaluation of educational programs.

Este artículo analiza las estrategias metodológicas utilizadas para cumplir con el reto de establecer indicadores con los que componer la evaluación del impacto de un programa de capacitación para profesores en servicio el Programa Letra y Vida. Este programa se implementó en la red de enseñanza del estado de São Paulo, durante el período 2003-2006, con objetivo de mejorar la práctica de aquellos docentes alfabetizadores que trabajan en los primeros años de Enseñanza Primaria. Precediendo la discusión metodológica, se discuten, basándose en las contribuciones de la literatura, la noción de indicadores, de sus tipos y sus propiedades, así como los aspectos técnicos y políticos que subyacen en la definición de dichos indicadores y que pueden apoyar la evaluación de los programas educativos.

No contexto da política educacional paulista, busca-se relacionar os resultados do Sistema de Avaliação do Rendimento Escolar do Estado de São Paulo (Saresp) ao direcionamento de ações de formação de professores. Este trabalho amplia a análise teórica do texto original, produzido durante o mestrado da autora, que focou a articulação entre o Saresp e os programas de formação contínua da rede estadual. Partindo dos anúncios da relação presente nos documentos oficiais, questiona-se em que medida é pertinente elaborar programas e ações de formação e bonificação de professores, tendo como pressuposto que os resultados dos alunos nas avaliações ilustram as necessidades de formação dos docentes e o trabalho realizado pelos professores. Conclui-se que essa relação não é direta, apesar de ser defendida no âmbito de elaboração de políticas educacionais preocupadas com a gestão racionalizada do sistema educacional, e aponta-se a necessidade de estudos e debates mais aprofundados sobre o binômio formação de professores/resultados de desempenho de alunos.

Taking the context of São Paulo's educational policy, an attempt is made to relate teacher training programmes to the results of SARESP (São Paulo Evaluation System of Educational Performance).This work is an extension of a theoretical analysis carried out in the author's original text, produced for a Master's Thesis, focusing on the relationship between SARESP and educational, training programmes of the state. Going on statements made in official documents, concerning the current understanding of the relationship between the two, one wonders to what extent it is relevant to design programs, and teachers' training activities, using student performance during assessments, as indicative of what teachers require.The conclusion is reached that this relationship is not straightforward, despite being defended within educational policies concerned with the streamlined management of the educational system. Furthermore, the need for further discussion and studies on this coupling: teacher education/ performance of students results, is indicated.

O presente trabalho apresenta resultados obtidos por meio da pesquisa realizada entre 2005 e 2006, intitulada Uso dos resultados do SARESP: o papel da avaliação nas políticas de formação docente, cujo propósito foi analisar possibilidades e limites da utilização dos resultados obtidos pelos alunos no Sistema de Avaliação do Rendimento Escolar do Estado de São Paulo (SARESP) para a formulação e o direcionamento de políticas de formação de professores. As preocupações recaíram sobre os programas de formação em língua portuguesa para o ensino fundamental. Foram visitadas quatro das treza diretorias regionais de ensino da capital do Estado de São Paulo a fim de conhecer o trabalho de formação docente realizado e analisar em que medida ele se relacionava aos dados obtidos no SARESP. O estudo qualitativo teve como principal estratégia a enquete exploratória, com uso de roteiros de entrevista e de observação semiestruturados. O referencial teórico sintetizou contribuições de Dennis Palumbo (1998) e de Marcus Figueiredo e Argelina Figueiredo (1986) para a compreensão do conceito e das etapas da política pública, assim como de Elba Barreto e Regina Pinto (2001), Blaine Worthen, James Sanders e Jody Fitzpatrick (2004) e Almerindo Afonso (1998) a respeito da discussão da avaliação de programas, entre outros. Concluiu-se que, apesar de a documentação dos programas de formação e o SARESP declararem que há relação entre os resultados da avaliação e os programas propostos, a concretização desse propósito depende do engajamento dos profissionais presentes nas diretorias de ensino. As ações formais da Secretaria da Educação para induzir esse uso de resultados não se mostraram suficientes para assegurar o pretenso vínculo entre avaliação e formação docente.

This work presents results of a study conducted between 2005 and 2006 entitled The use of the results of the SARESP Exam: the role of assessment in teacher education policies (Uso dos resultados do SARESP: o papel da avaliação nas políticas de formação docente), whose purpose was to analyze possibilities and limits of the use of the results obtained by pupils in the SARESP Exam (School Performance Assessment System of the State São Paulo) to formulate and direct teacher education policies. The attention was focused on education programs for teachers of Portuguese Language to pupils in fundamental education. Four out of the thirteen Regional Education Directorships of the State of São Paulo were visited to gain acquaintance with the teacher education programs they developed and to investigate to what extent they could be related to the results achieved in the SARESP exam. The qualitative study adopted as its main strategy the exploratory survey, with the use of semi-structured interview and observation scripts. The theoretical framework employed brought together contributions by Dennis Palumbo (1998) and Marcus Figueiredo and Argelina Figueiredo (1986) to understand the concept and stages of public policy, as well as by Elba Barreto and Regina Pinto (2001), Blaine Worthen, James Sanders and Jody Fitzpatrick (2004), and by Almerindo Afonso (1998) on the discussion about assessment programs, among others. It concludes that, the statements in the teacher education program and in the SARESP documentations about the correlation between the former and pupil assessment results notwithstanding, the actual achievement of positive results depends on the effective commitment of the professionals working at the Education Directorships. Formal actions by the Secretariat for Education to foster this use of the results have proved insufficient to ensure the proposed link between pupil assessment and teacher education.